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236 >13 500 1048 


банка отделений городов 


Биометрические параметры 


№ [8 4 
Е Запись голоса 021 Изображение лица 


2 


Коммерческие и государственные услуги 


69 Государство = | Нотариат 
| о | 
Предоставление услуг 


Предоставление услуг 
по биометрии 
по биометрии 


Ш Образование ©) Суды 
Удаленная сдача экзаменов Участие в судебных 
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ЕБС — это национальная платформа, которая предоставляет 
возможность гражданам пользоваться государственными 
и коммерческими услугами удобно и безопасно. 


Финансовый рынок 


@ 


Открытие счетов Открытие вкладов 


Ритейл 


Оплата покупок 


одним взглядом 


Транспорт 
Проход/оплата проезда 


с использованием биометрии 


$ 
9 


Получение кредитов 


Е-соттегсе 
Оплата онлайн по биометрии 


с подтверждением возраста 


Телеком 


Дистанционное получение е-51М 
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Работа с биометрией - ситуация... 


ПРОБЛЕМА 


Работа с лицом и голосом: 


• Существует много решений (вендоров) 
• Различные характеристики биопроцессоров 


Ы Нейросети постоянно развиваются 


Безопасность: 


. Проверить, не фото ли перед нами? 
Е А не запись ли это? 


• Все хотят оценить риски ошибки 


РЕШЕНИЕ 


Проверять по нескольким 
модальностям с несколькими 
сетями — хорошо! 

Отбить атаки — необходимо... 
И всё это без потерь данных, 


отказоустойчиво, под нагрузкой... 


(н зь аи & РТЛабс |4 Ростелеком 


группл номплний 


Нейросети и попугаи... 


Сеть1 

(сравнение) ЕЕ 
Сеть 2 

(сравнение) е 
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ні.) Неого" & РТЛабс Ф Ростелеком 


Вендоры возвращают $соге 


Вычисление 
итоговой вероятности 


Собрали базу образцов... 


Измеряем: 


• Вероятность ложного допуска \е1 \е2 “ \ем 

• Вероятность ложного недопуска 

• Вероятности ложного несовпадения 

• Вероятности ложного совпадения ттр 

• Обобщенную вероятность ложного == = = 
допуска == 

• Обобщенную вероятность ложного ТЕНТА т 


недопуска | 


группа номплний 


(н осн & РТЛабс Р Ростелеком 


Этап 1 
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(н нетра & РТЛабс |4 Ростелеком 


Нейросети и вендоры 


Свойства нейросетей: Что мы сделали: 

• Вендоры меняют нейросети • Делаем переиндексацию. 

• Все вендоры не всегда извлекают • Регистрируем образцы во всех 
шаблон биометрических процессорах 

• Увсех различное АРІ • Делаем общее АР! (ехїгасї/сотраге/...) 
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ГРУППА номплний 


Шаблоны и смена вендора е1 
папх 
| Модули работы Ме2 
Порядок регистрации: с вендорами 
1. Происходит считывание биометрических образцов. ПЕ 
2. Из конфигурации берётся список вендоров. \\ем 


3. По каждому из вендоров отправляется запрос на 
извлечение БШ. 

4. ВК для распределения нагрузки (модуль) 

5. Происходит выбор конкретного биометрического 


процессора вендора (пріпх). Подключение нового вендора: 


6. При получении ответов от всех вендоров (либо по • Проводим тестирование и измерения 
истечении тайм-аута), извлеченные биометрические • — Отправляем на биопроцессор все образцы по 
шаблоны отправляются на сохранение. модальности 


. Сохраняем результаты 


• Активируем вендора в системе! 
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АР! для биопроцессоров 


1 РОТ /ранеги/\1/ежгасЕ НТТР/1.1 

2 Сопќепї-Туре: ти@раг/Логт-Чата; 

‚ Боипдагу=ҒЗОАНА ХпһКор8е\му1іССІРОКӘ рј2г умѕН 
Сопѓепії-Гепеїћ: {длина тела сообщения} 


-2ЗОВНА Хпһкор8е\№у1іССІРОК еј2г умѕН 
Сопќепі-Оіѕроѕійоп: Ғогт-даѓа; пате="ѕатріе" 
Сопїепї-Туре: аџаіо/рст 


{Поток байт биометрического образца} 
--ҒЗОКНА ХпһКкорвеМу11ССІРаК еј2г умѕН 


Сопѓепї-Оіѕроѕіїоп: їогт-даѓа; пате="теїаааїа" 
Сопќепї-Туре: арріісаїіоп/јѕоп 
{ 
"уотсе_4гавтепт5": { 
"Яівїѕ аѕс": { 
‘саге Тота 
9 "епа": 9.111 
20 }, 
2 "аіріёѕ_аеѕс": { 
22 "агї": 10.999, 
З "епа": 22.504 
|. 
"9івїєѕ гапаот": { 
"саге": 24.001, 
"епа": 32.001 
} 
} 


} 
--ҒЗОАНА_ ХпһћкорвеМу1іССІРОК вј2г_ умѕН 
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РОЅТ /м1/раёегп/сотраге НТТР/1.1 

Сопќепї-Туре: тиїйрагі/ѓогт-даїа; 
боипдагу=ҒЗОАНА _Хпһкор8р\№1іССІРОКӘ рј2г умѕН 
Сопѓепії-Гепеїћ: {длина тела сообщения} 


--ҒЗОКНА ХпһКкорвеМу/11ССІРОКӘ еј2г умѕН 
Сопќепі-Оіѕроѕіїіоп: гогт-Чака; пате="Юіо_еаёиге" 
Сопїепї-Туре: арріісайоп/осіеї-ѕїгеат 


{Поток байт шаблона, полученный из биометрического образцапри 
биометрической верификации} 
--ЁҒЗОАНА_ХпҺКОор8ре\М/1іССІРОКӘ еј2г умѕН 


Сопѓепі-Оіѕроѕіїіоп: Ёогт-даїа; пате="Біо_їетріІаїе" 
Сопїепї-Туре: арріісайоп/осіеї-ѕїгеат 


{Поток байт Биометрического контрольного шаблона} 
--ҒЗОКНА_ ХпһкорвеМу/1іССІРаК еј2г умѕН-- 
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ГРУППА номплний 


Этап 2 
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группл номплний 


Как обезопасить себя и клиента? 


Возможности Лайвнесс: Решение: 


Проверки Проверки Комбинированные Использовать всё Работаем аналогично 
по фото по голосу проверки что можно! лицу/голосу 
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ГРУППА номплний 


Этап 3 
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ни) нечо: ФӘ РТЛабс Ф Ростелеком 


группл комплний 


Биометрия, какая ты? 


. Нужно использовать видео ^ 20МЬ 
. Фотографии и звук по 2-ЗМЬ 

Транспорт 
. Векторы нейронных сетей 1КБ-ЗМЬ 


. Всё это доставить в несколько точек 
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группа номплний 


Транспорт и очередь 


1. Очереди с персистентностью + балансировка 


о Кайа 


Арасћһе Кака агсһіќесїиге 


| Ргодисег 


\ 


...{ Сопѕитег 
рш 
....4 Сопѕитег 


Стоир 


рий : 
їч Сопѕитег 


Ргодисег 


7: 
РЧ; 


\ 


4 ----.-.-- р-н 


\ 


Ргодисег 


О 
О ! Н Н 
. Н: Н 
р НА Н 
ри | 
—риіі__ н 

Ргойисег і 0—44 Сопѕштег ). 
' й м { 
1 Г, „” З , 
а ө П ее» 
` \ и 
А ` =“ 

гедізќег“, % =“ гедіѕќег 


зуь / 2оокеерег 

ее Сіиѕќег ( 
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группа номплний 


Транспорт и очередь 


2. Очереди с репликацией 


Вгокег 1 


Торіс 
Рагєісіоп О 
(Іеааег) 


Торіс 2 
Рагєієіоп 1 
(ІЅВ) 
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о кайа 


Репликация 


Вгокег 2 


Торіс 2 
Рагсісіоп О 
(158) 


Торіс 2 
Рагбісіоп 1 
(теааег) 


Вгокег 5 


Торіс 2 
Рагсісіоп О 
(1ЅВ) 


Торіс 2 
Рагєієіоп 1 
(ІЅВ) 
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ГРУППА номплний 


Транспорт и очередь 


3. Сравнение с ВМА 


96 Кака 


Ғеаќиге Каћа Ваьыємо 
Вгокегіеѕѕ/Оесепќгаіігеа - - 
Регэзетпсе/Кейаь!ку + + 

Меѕѕаве Кеїепйоп Роіісу Аскѕ 
Сараску Сузтег 0О13К$ Септга! Ѕїоге 
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(н осн & РТЛабс Р Ростелеком 


Транспорт и очередь 


4. Схема с каї Ка ѕїгеатѕ для конвейеров обработки 


96 Кака 


Выход 


гезр 5 


гезр 1 


гезр 2 
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Этап 4 
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(н) осн & РТЛабс Р Ростелеком 


группа компАНИЙ 


Передавать научились – давайте сохраним! 


1. Логика ВеріопЅегуег”а 


Вегоп5$егуег$ Кеғріопѕ 
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НОЕЅ Ыоскѕ 
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ГРУППА номплний 


Передавать научились – давайте сохраним! 


2. Размазывание нагрузки на кластер 


РАСИ ЯРЯАЯСНЕ 
2 


Таблица 
с биометрией 


Кееіопѕ 
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ГРУППА номплний 


Передавать научились – давайте сохраним! 


3. Хранение (Схема хранения биометрии по СЕ + запросы) 


аА ТООООООО .. 99999999 (ВВ) 


_ мо в52 855 ЭТ _ вәБ — 
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ГРУППА номплний 


Этап 5 


Работа с ШЦімепеѕѕ 


Хранение 


АРТ 4» Модули Работа с биометрией 


Транспорт 


Измерение показателей 
нейросетей 
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группа номплний 


(н оН © РТЛабс Р Ростелеком 


Мультимодальность, мульти-Шмепеѕѕ 


Запрос инструкций 


Инструкции Шмуепеѕѕ 


АРІ Модуль инструкций 
Видео 
Результат верификации 

Видео 
Маео Цімепеѕѕ 

Фото 

Фото 

Мегіғугеѕиії Звук ВіоРгоху 
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ГРУППА номплний 


Реализация синхронных “ВЕр”-запросов, снаружи в 
режиме НА с асинхронным взаимодействием внутри через 


Вед! 


(н оН & РТЛабс Р Ростелеком 


геачеѕт ѕир гедиезї Ір ру геаиеѕї ТО 
М№оае 1 Веаїіѕ Моде 2 


геѕропѕе 


геаиезї геѕропзе 


РіреШпе 
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ГРУППА номплний 


РиђЅир для изменения настроек 


Админ Админка Веаіѕ Софт в Ореп 


доске 
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группа номплний 


ГоокКеерег для кворума и почему от него отказались в 
своем ПО 


Ғеаќиге 2К О5 
Сегига!хеа = + 
Регѕіѕїепсе 2 а 
ОЦІ = о 
АР еѕѕ - + 
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ГРУППА номплний 


Этап 6 


Работа с ШЦімепеѕѕ 


Хранение 


АРТ 4» Модули Работа с биометрией 


Транспорт 


Измерение показателей 
нейросетей 
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группа номплний 


Внешнее взаимодействие 


ПРОБЛЕМЫ РЕШЕНИЯ 
= Для Шуепеѕѕ много различных решений е Сами реализовываем логику инструкций и 
• Возможность использования модальности проверки на стороне платформы. 
зависит от устройств • Поддерживаем различных клиентов 
. Много параметров в АР! — сложно (как дать и согласуем наборы действий в рамках 
клиенту простое АРІ?) протокола. 


• Реализовываем сложное «внутри», сами 


делаем сложные интерфейсы. 
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ГРУППА номплний 


Сложили картинку 


Модули 


<> АРТ <» ЕБС 


(у оРЕМ5НІҒТ 
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Хранение 


Транспорт 


Работа с Цімепеѕѕ 


Работа с биометрией 


2 доскег 


Измерение показателей 
нейросетей 


пе РТЛабс:) 
| 4 р і 
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А 
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іпѓо@габѕ.ги 


Сергей Браун, зегвеу.Бгаип@ гЧарз.ги ? 
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